Erasing Concepts from Diffusion Models
https://gyazo.com/5534870b69d1861249827c94382f2ffa
GitHub : https://github.com/rohitgandikota/erasing
project:https://erasing.baulab.info
Paper:https://arxiv.org/pdf/2303.07345.pdf
HuggingFace Demo:https://huggingface.co/spaces/baulab/Erasing-Concepts-In-Diffusion
Weights:https://erasing.baulab.info/weights/esd_models/
モデルから特定の概念を完全に消し去る
DreamBoothの逆?nomadoor.icon
例えばゴッホの絵柄を完全に忘れさせる
ゴッホというトークンではなく概念を忘れされるので、完全にゴッホの絵を再現できるプロンプト(oilpainting, Impressionism, etc.)を入れたとしてもゴッホの絵にはならない?
エンドユーザーがDiffusionモデルを使うときに、絶対NSFW許さない目的で概念を削除するのはとても良さそう
ただ、配布するモデルから色々と概念が消えていると、Stable Diffusion 2.0のときのような厄介事が起きるような気もするししない気もする